1. 解的存在性: 由定理 3.7.1 知 是一个非负有界解.

2. 解的表达式: 由于 是瞬时态的转移概率矩阵, 于是 , 由定理 3.6.1 的引理, 有

3. 解的唯一性: 设 是另一个非负有界解, 则

从而 . 证毕.